Wielkie modele językowe (LLM) generują język podobnie jak ludzie

15 maja 2025, 08:33

Naukowcy z Uniwersytetu Oksfordzkiego i Allen Institute for AI ze zdumieniem zauważyli, że wielkie modele językowe (LLM) – takie jak używane np. przez ChatGPT – generalizują wzorce językowe podobnie jak ludzie, poprzez analogie a nie ścisłe trzymanie się zasad. Badacze postanowili sprawdzić, na ile prawdziwe jest powszechnie panujące przekonanie, że LLM generują swoje wypowiedzi na podstawie obowiązujących zasad, które wydedukował z danych treningowych. Tymczasem okazało się, że – podobnie jak ludzie – modele językowe posługują się przykładami i analogiami podczas tworzenia nieznanych sobie słów.



© Nas

Zbyt droga nowoczesność

28 grudnia 2007, 11:54

Powoli mijają czasy, gdy filmy nagrywane są na celuloidowej taśmie. Teraz coraz powszechniej przechowuje się obrazy w formie cyfrowej. Nowa technologia ma wiele zalet, chociażby takich jak łatwość zwielokrotniania czy możliwość natychmiastowej edycji obrazu. Jednak, jak się okazuje, nie zawsze to, co cyfrowe, oznacza lepsze.


Mniej polskich superkomputerów

23 czerwca 2009, 11:26

Opublikowaną właśnie 33. lista najpotężniejszych superkomputerów świata rozpoczyna, podobnie jak w październiku 2008, Roadrunner. Ten wybudowany przez IBM-a komputer jest pierwszą maszyną w historii, której wydajność przekroczyła barierę petaflopsa (1,105 PFlops).


Procesor napędzany ciepłem

15 października 2010, 19:51

Rozwój nauki i technologii często zadziwia odkryciami. Ale bywa, że jeszcze większe zdumienie budzą odkrycia pojawiające się na skrzyżowaniu różnych dziedzin badań. Takim krzyżowym wynalazkiem jest termospintronika, która pozwoli być może stworzyć komputer napędzany ciepłem, zamiast prądu.


Przytrzymywanie za oczy

4 maja 2012, 13:47

Choć samice nartników Rheumatobates rileyi starają się jak mogą, jeśli samcowi uda się na nie wspiąć, nie unikną kopulacji. Niezbyt delikatny partner przytrzyma je bowiem za... oczy.


Powinno boleć a znieczula

25 października 2013, 11:00

Zamieszkujące Amerykę Północą gryzonie Onychomys z rodziny chomikowatych, nie tylko są odporne na jad skorpiona, ale mogą przyczynić się do wyprodukowania doskonalszych środków przeciwbólowych. Onychomys, gdy podczas polowania zostanie ugryziony przez skorpiona, przez chwilę liże łapy, a następnie kontynuuje atak


FMD - skuteczna dieta naśladująca post?

19 czerwca 2015, 12:38

Zespół pracujący pod kierunkiem Valtera Longo z University of Southern California wykazał, że okresowe stosowanie diety naśladującej post (FMD) niesie ze sobą wiele pozytywnych skutków dla zdrowia. Naukowcy podczas badań stwierdzili, że u starych myszy, które były okresowo na czterodniowej diecie niskokalorycznej, doszło do zmniejszenia ilości brzusznej tkanki tłuszczowej i zwiększenia liczby komórek progenitorowych oraz macierzystych w wielu organach, w tym w mózgu.


Teksty Piramid - czyli dlaczego nie wszystkie piramidy są nieme?

23 grudnia 2016, 12:32

W powszechnej opinii piramidy to po prostu monumentalne grobowce. O tym, że nie są to jedynie milczący świadkowie historii starożytnego Egiptu, opowiada w rozmowie z PAP egiptolog dr Joanna Popielska-Grzybowska. Badaczka zajmuje się hieroglificznymi zaklęciami - Tekstami Piramid, które są wykute w kilkunastu piramidach sprzed ponad 4 tys. lat.


Uderzenie asteroidy w Ziemię

Najpierw nuklearna zima, a później długotrwałe globalne ocieplenie

29 maja 2018, 09:40

Przed około 65 milionami lat na Ziemię spadła asteroida, która przyniosła zagładę dinozaurom. Naukowcy od dziesięcioleci próbują zrozumieć, co stało się później. Jak wyglądała Ziemia przez następne setki i tysiące lat.


Wielkie XIX-wieczne odkrycia paleontologiczne wpłynęły na zbiorową wyobraźnię

28 kwietnia 2019, 06:04

Wygląd potwora z Loch Ness (Nessie) i nie tylko zainspirowała "dinomania" z okresu georgiańskiego.


Jubileusz 75-lecia Polskiej Akademii Nauk